Position Encoding 学习笔记

Position Encoding 学习笔记

博主学习position encoding的思路遵循是什么?为什么?怎么做?的顺序,所以本篇blog的顺序也按照这个顺序展开

1、什么是位置编码

是什么?为什么?怎么做?

参考链接

Transformer学习笔记一:Positional Encoding(位置编码)
Transformer升级之路:1、Sinusoidal位置编码追根溯源

作者

Zayne Zhu

发布于

2025-02-12

更新于

2025-02-19

许可协议

You need to set install_url to use ShareThis. Please set it in _config.yml.
You forgot to set the business or currency_code for Paypal. Please set it in _config.yml.

评论

You forgot to set the shortname for Disqus. Please set it in _config.yml.